ภารกิจสำเร็จแล้ว! คุณได้เชี่ยวชาญพื้นฐานภาษาของปัญญาประดิษฐ์แล้ว!ยังไม่ถูกต้องนัก! มาลองสร้างลำดับใหม่อีกครั้งกันเถอะ!ความรู้ถูกอัปโหลดแล้ว: โทเคนและการเรียงลำดับ ... ใช่ไหม ... ? ... หรือ ...
เราเรียกสิ่งที่เป็นชิ้นเล็กๆ ที่ปัญญาประดิษฐ์ใช้อ่านว่าอะไร?
ถูกต้องแล้ว! โทเคนคือหน่วยย่อย เช่น "แอปเปิล", "อิง", หรือ "?" ที่ประกอบเป็นภาษาสำหรับปัญญาประดิษฐ์
คอมพิวเตอร์แทนที่โทเคนอย่างไรเพื่อให้เข้าใจมันได้?
ถูกต้อง! คอมพิวเตอร์เข้าใจแค่ตัวเลขเท่านั้น ดังนั้นแต่ละโทเคนจะได้หมายเลขระบุตัวตนที่ไม่ซ้ำกัน
ถ้าเราได้โทเคนของคำว่า "เพื่อน" และ "เรือ" แล้ว คำว่า "มิตรภาพ" จะถูกเรียกว่าอะไรเมื่อมันกลายเป็นรายการของตัวเลข?
ถูกต้องเลย! รายการของตัวเลขโทเคนที่เรียงลำดับเรียกว่า ลำดับ
ทำไมลำดับของโทเคนในลำดับถึงสำคัญมากขนาดนี้?
ถูกต้อง! โทเคนเดียวกันในลำดับที่ต่างกันสามารถเปลี่ยนความหมายของประโยคทั้งหมดได้
ขีดจำกัดของจำนวนโทเคนที่ปัญญาประดิษฐ์สามารถประมวลผลพร้อมกันได้คือเท่าไหร่?
ถูกต้อง! หน้าต่างบริบทคือขอบเขตของปริมาณข้อมูลที่ปัญญาประดิษฐ์สามารถ "จดจำ" ได้ระหว่างการสนทนา
เครื่องหมายวรรคตอนตัวเดียว เช่น จุด (.) สามารถเป็นโทเคนได้หรือไม่?
ถูกต้อง! โทเคนสามารถเป็นคำเต็ม หรือส่วนของคำ หรือแม้แต่เครื่องหมายวรรคตอน ทุกอย่างคือชิ้นส่วนที่สร้างขึ้น!
1
การแยกตัวอักษรและการเรียงลำดับ
EvoClass-AI004Lecture 4
0
🤖 บี๊บ บู๊! สวัสดี ผู้บัญชาการ! เลือกหัวข้อย่อยด้านล่างเพื่อดูว่าปัญญาประดิษฐ์ "อ่าน" อย่างไรผ่านการแยกตัวอักษร
คำสั่งจากพี-บอทดำเนินการจริง
บี๊บ บู๊!สวัสดี ผู้บัญชาการ! เพื่อสอนปัญญาประดิษฐ์ให้อ่าน เราต้องตัดคำออกเป็นชิ้นเล็กๆ คล้ายกับบล็อกเลโก้ก่อน จากนั้นพร้อมเรียนรู้ไหมว่าคอมพิวเตอร์แปลงคำให้เป็นตัวเลขได้อย่างไร?
ความก้าวหน้าของหัวข้อ0%
เลือกได้ดีมาก! โทเคนเหมือนบล็อกเลโก้ คำเช่น "มิตรภาพ" จะถูกแบ่งออกเป็นส่วนย่อย เช่น "เพื่อน" และ "เรือ" แม้แต่ "." ธรรมดา ก็เป็นโทเคนได้! สำหรับปัญญาประดิษฐ์ ชิ้นเหล่านี้จัดการง่ายกว่าประโยคยาวๆ ทั้งฉบับ
1
หัวข้อย่อย 1
โทเคนคืออะไร?
การตัดข้อความออกเป็นชิ้นเล็กๆ ที่เป็นส่วนประกอบ เช่น "เพื่อน" และ "เรือ"
ดูสิ! เมื่อเราได้โทเคนแล้ว ปัญญาประดิษฐ์จะให้แต่ละตัวมีหมายเลขประจำตัวลับ ตัวเลขเหล่านี้สร้างเป็น "ลำดับ" จำไว้นะ: ลำดับสำคัญมาก! "หมาเหยียดคน" และ "คนเหยียดหมา" ใช้บล็อกเดียวกัน แต่ลำดับบอกเรื่องราวที่ต่างกันโดยสิ้นเชิง!
2
หัวข้อย่อย 2
พลังของลำดับ
การเปลี่ยนบล็อกให้เป็นรายการทางคณิตศาสตร์ที่ลำดับสำคัญที่สุด
รู้ไหม? ปัญญาประดิษฐ์มี "หน้าต่างบริบท" ซึ่งคล้ายกับขนาดมือของมัน มันสามารถจดจำโทเคนจำนวนหนึ่งใน "ความทรงจำ" ได้เพียงครั้งเดียว ก่อนที่จะเริ่มลืมสิ่งแรกที่จำไว้!
รู้ไหม?
ปัญญาประดิษฐ์มี "หน้าต่างบริบท" ซึ่งคล้ายกับขนาดมือของมัน มันสามารถจดจำโทเคนจำนวนหนึ่งใน "ความทรงจำ" ได้เพียงครั้งเดียว ก่อนที่จะเริ่มลืมสิ่งแรกที่จำไว้!
กำลังโหลด...
⭐⭐⭐

ภารกิจสำเร็จ!

คุณเป็นผู้เชี่ยวชาญโทเคน!